Jürgens lớn lên trong lâu đài Ottmanach của cha mẹ ở Magdalensberg tại Kärnten cùng với 2 anh em John (1931–2006) và Manfred. Ông ban đầu tự học chơi dương cầm, một thời gian sau mới được dạy. Theo hồi ký Der Mann mit dem Fagott (Người đàn ông với cây kèn Pha-gốt), trong nhóm thiếu niên Hitler ông có lần bị một huynh trưởng cho một bạt tai thật nặng khiến ông cho tới giờ một bên tai không được nghe rõ ràng.[5][6] Ông đã rời trường học một năm trước khi lấy tú tài. Sau này ông học nhạc tại Mozarteum ở Salzburg.